智谱 AI lanza CritiqueLLM, un modelo de puntuación de alta calidad y bajo costo. Los indicadores tradicionales de evaluación, como BLEU y ROUGE, carecen de una comprensión completa del significado general. CritiqueLLM propone un modelo de evaluación de la calidad del texto explicable y escalable. En 8 tareas comunes, CritiqueLLM supera a otros modelos. CritiqueLLM se basa en la ampliación de consultas de usuarios, la recopilación de datos de evaluación con texto de referencia, la reescritura de datos de evaluación sin texto de referencia y el entrenamiento del modelo.